|
|
Počítačové adaptivní testování a možnosti jeho využití v psychodiagnostice
Dlouhá, Jana ; Bahbouh, Radvan (vedoucí práce) ; Niederlová, Markéta (oponent)
4 Abstrakt Teoretická část práce je zaměřena na počítačové adaptivní testování (CAT) a teorii odpovědi na položku (IRT). Zařazena je také kapitola srovnávající IRT s běžně používanou klasickou testovou teorií (CTT). Je zde také krátká zmínka o počítačovém a online testování, protože tyto typy administrace se v mnohém liší od klasických tužka-a- papír testů. Cílem této práce bylo zhodnotit jednotlivé způsoby administrace eEOD testu a porovnat je s testy eEPQ a sebehodnocením. V praktické části byly kalibrovány položky škály extraverze Eysenckova osobnostního dotazníku (eEOD) na skupině 124 respondentů Na získaných datech byla následně provedena simulace počítačového adaptivního testování, která jasně ukázala výhody tohoto typu testování v porovnání s klasickou podobou testu. Tyto výsledky byly porovnány s výsledky reálné administrace CAT testu na původním vzorku a na nové skupině respondentů (Np=69, Nn=68). Výsledky silně korelovaly s výsledky simulovaného testu. Pro ověření validity počítačové adaptivní verze eEOD byly navíc výsledky respondentů v tomto testu porovnány s výsledky v testu eEPQ a v krátké sebeposuzovací škále. Nakonec bylo provedeno srovnání výsledků počítačové adaptivní administrace s výsledky administrace tužka-a-papír. Klíčová slova: Počítačové adaptivní testování, online testování, teorie...
|
|
|
Computerized Adaptive Testing In Kinanthropology: Monte Carlo Simulations Using The Physical Self Description Questionnaire
Komarc, Martin ; Štochl, Jan (vedoucí práce) ; Martinková, Patrícia (oponent) ; Scheier, Lawrence (oponent)
Předložená disertační práce si klade za cíl prezentaci využití počítačového adaptivního testování (computerized adaptive testing - CAT) v oblasti Kinantropologie. Přizpůsobením testu latentní úrovni konkrétního testovaného jedince, nabízí CAT řadu teoretických a metodologických výhod a nabízí tím možnost zvýšení efektivity procesu testování. V první části práce jsou představeny teoretické, koncepční a historické základy CAT. Tato diskuse nutně obsahuje stručný popis teorie odpovědí na položku (item response theory - IRT), protože IRT je téměř výhradně používaná jako matematický model v dnešních CAT aplikacích. Praktická využitelnost CAT je posléze hodnocena pomocí Monte-Carlo simulace zahrnující adaptivní administraci Physical Self-description questionnaire (PSDQ) - nástroje, který je široce používán k posouzení tělesného sebepojetí v oblasti psychologie sportu. Pro Monte Carlo simulaci adaptivní administrace PSDQ byla využita skutečná položková banka (n = 70), přičemž jednotlivé položky byly kalibrovány pomocí Graded response modelu (GRM, viz Samejima, 1969, 1997). Odpovědi na jednotlivé položky byly simulovány na základě parametrů položek a předem specifikovaných skutečných hodnot latentní úrovně tělesného sebepojetí. V rámci simulace adaptivní administrace byl hodnocen zejména počet...
|
|
|
Question Selection Methods for Adaptive Testing with Bayesian Networks
Plajner, Martin ; Magauina, A. ; Vomlel, Jiří
The performance of Computerized Adaptive Testing systems, which are used for testing of human knowledge, relies heavily on methods selecting correct questions for tested students. In this article we propose three different methods selecting questions with Bayesian networks as students’ models. We present the motivation to use these methods and their mathematical description. Two empirical datasets, paper tests of specific topics in mathematics and Czech language for foreigners, were collected for the purpose of methods’ testing. All three methods were tested using simulated testing procedure and results are compared for individual methods. The comparison is done also with the sequential selection of questions to provide a relation to the classical way of testing. The proposed methods are behaving much better than the sequential selection which verifies the need to use a better selection method. Individually, our methods behave differently, i.e., select different questions but the success rate of model’s predictions is very similar for all of them. This motivates further research in this topic to find an ordering between methods and to find the best method which would provide the best possible selections in computerized adaptive tests.
|
|
|
Adaptivní testování pro odhad znalostí
Tělupil, Dominik ; Martinková, Patrícia (vedoucí práce) ; Omelka, Marek (oponent)
Tato práce je věnována popisu a analýze počítačových adaptivních testů, což jsou psychometrické testy, v nichž jsou položky respondentům předklá- dány postupně na základě aktuálního odhadu jejich znalostí. Práce se sou- středí výhradně na testy, které jsou založeny na dichotomických modelech teorie odpovědi na položku, tj. na případ, kdy je položky možné odpovědět pouze správně, nebo nesprávně, částečně správné odpovědi nejsou povoleny. Představena jsou možná nastavení adaptivního testu, tj. kritéria volby opti- mální položky, pravidla pro ukončení testu, metody odhadu znalostí, a také další možná rozšíření, např. metody kontroly expozice položek a vyvážení obsahu. V analytické části pak zkoumáme vliv nastavení adaptivního testu na jeho průměrnou délku a průměrné absolutní vychýlení odhadu znalostí pomocí modelů lineární regrese. Kromě post hoc analýzy reálných dat, ve které využíváme odpovědí skutečných respondentů testu, jejichž skutečnou znalost neznáme, provádíme analýzu za pomoci simulovaných odpovědí re- spondentů se známou úrovní znalostí. V poslední části práce jsou představeny možnosti, které pro analýzu adaptivních testů nabízí statistický software R, včetně možnosti vytvoření reálného adaptivního testu. 1
|
|
|
Computerized Adaptive Testing In Kinanthropology: Monte Carlo Simulations Using The Physical Self Description Questionnaire
Komarc, Martin ; Štochl, Jan (vedoucí práce) ; Martinková, Patrícia (oponent) ; Scheier, Lawrence (oponent)
Předložená disertační práce si klade za cíl prezentaci využití počítačového adaptivního testování (computerized adaptive testing - CAT) v oblasti Kinantropologie. Přizpůsobením testu latentní úrovni konkrétního testovaného jedince, nabízí CAT řadu teoretických a metodologických výhod a nabízí tím možnost zvýšení efektivity procesu testování. V první části práce jsou představeny teoretické, koncepční a historické základy CAT. Tato diskuse nutně obsahuje stručný popis teorie odpovědí na položku (item response theory - IRT), protože IRT je téměř výhradně používaná jako matematický model v dnešních CAT aplikacích. Praktická využitelnost CAT je posléze hodnocena pomocí Monte-Carlo simulace zahrnující adaptivní administraci Physical Self-description questionnaire (PSDQ) - nástroje, který je široce používán k posouzení tělesného sebepojetí v oblasti psychologie sportu. Pro Monte Carlo simulaci adaptivní administrace PSDQ byla využita skutečná položková banka (n = 70), přičemž jednotlivé položky byly kalibrovány pomocí Graded response modelu (GRM, viz Samejima, 1969, 1997). Odpovědi na jednotlivé položky byly simulovány na základě parametrů položek a předem specifikovaných skutečných hodnot latentní úrovně tělesného sebepojetí. V rámci simulace adaptivní administrace byl hodnocen zejména počet...
|
|
|
Počítačové adaptivní testování a možnosti jeho využití v psychodiagnostice
Dlouhá, Jana ; Bahbouh, Radvan (vedoucí práce) ; Niederlová, Markéta (oponent)
4 Abstrakt Teoretická část práce je zaměřena na počítačové adaptivní testování (CAT) a teorii odpovědi na položku (IRT). Zařazena je také kapitola srovnávající IRT s běžně používanou klasickou testovou teorií (CTT). Je zde také krátká zmínka o počítačovém a online testování, protože tyto typy administrace se v mnohém liší od klasických tužka-a- papír testů. Cílem této práce bylo zhodnotit jednotlivé způsoby administrace eEOD testu a porovnat je s testy eEPQ a sebehodnocením. V praktické části byly kalibrovány položky škály extraverze Eysenckova osobnostního dotazníku (eEOD) na skupině 124 respondentů Na získaných datech byla následně provedena simulace počítačového adaptivního testování, která jasně ukázala výhody tohoto typu testování v porovnání s klasickou podobou testu. Tyto výsledky byly porovnány s výsledky reálné administrace CAT testu na původním vzorku a na nové skupině respondentů (Np=69, Nn=68). Výsledky silně korelovaly s výsledky simulovaného testu. Pro ověření validity počítačové adaptivní verze eEOD byly navíc výsledky respondentů v tomto testu porovnány s výsledky v testu eEPQ a v krátké sebeposuzovací škále. Nakonec bylo provedeno srovnání výsledků počítačové adaptivní administrace s výsledky administrace tužka-a-papír. Klíčová slova: Počítačové adaptivní testování, online testování, teorie...
|
host ::
RSS.